ABSTRACT
This study aimed to describe the statistical methods used in PhD thesis in sports and exercise sciences, and to examine the time trends of statistical methods prevalence. We analyzed 50 PhD theses supported by a post-graduate program recognized by CAPES and defended between January 2003 and December 2013. Most theses used more than two statistical methods, and T-test, ANOVA, multiple comparisons, correlation and reliability analysis were the most used approaches. Less than 50% of both experimental and observational theses reported the effect size (ES), confidence interval (CI), sample size calculation and observed power analysis. The use of multiple comparisons in experimental studies significantly increased in the last 5-years (63.2%) compared to 2004-2008 period. No other significant changes were observed. Results suggest that several statistical methods are used in quantitative design studies. Due to the observed large prevalence of statistical deficiencies (lack of reporting ES, CI, power analysis), postgraduate programs should have qualified statisticians with a major say in checking the statistical quality of PhD theses and subsequent articles, besides supervisors more concerned to the statistical methods...(AU)
Este estudo teve como objetivo descrever os métodos estatísticos utilizados em teses de doutorado em ciências do esporte e do exercício e examinar as tendências temporais da prevalência desses métodos. Foram analisadas 50 teses de doutorado desenvolvidas em programa de pós-graduação reconhecido pela CAPES e defendidas entre janeiro de 2003 e dezembro de 2013. A maioria das teses utilizou mais de dois métodos estatísticos. Teste t, ANOVA, comparações múltiplas, correlação e análise de confiabilidade foram as abordagens mais utilizadas. Menos de 50% das teses experimentais e observacionais relataram o tamanho do efeito (ES), intervalo de confiança (CI), cálculo do tamanho da amostra e análise de potência observada. O uso de comparações múltiplas em estudos experimentais aumentou significativamente (63,2%) nos últimos 5 anos em relação ao período de 2004-2008. Não foram observadas outras alterações significativas. Os resultados sugerem que vários métodos estatísticos são usados em estudos de design quantitativo. Devido à grande prevalência observada de deficiências estatísticas (falta de notificação de ES, IC, análise de potência), os programas de pós-graduação devem ter estatísticos qualificados com grande influência no controle da qualidade estatística das teses de doutorado e artigos subsequentes, além disso, orientadores deveriam ter maior preocupação em relação aos métodos...(AU)
Subject(s)
Humans , Male , Female , Physical Education and Training , Academic Dissertation , StatisticsABSTRACT
Abstract Quantitative monographic studies systematically use inferential statistical procedures to test hypotheses. For this purpose, sampling procedures and sample sizes need to be adequate for the proposed procedures. The aim of this study was to identify the sample selection methods, as well as the performance and types of calculation to determine the sample size adopted in theses and dissertations developed in a graduate program in the field of Physical Education. Theses and dissertations defended between 2003 and 2013 were obtained through digital repository. Only quantitative studies were included, in which the following issues were analyzed: (1) sample selection criteria; (2) presence of sample calculation; (3) calculation type to estimate sample size. A total of 199 studies were included. Of these, 6% (n=11) used probabilistic methods for sample selection and 3% (n=6) used animal models. As for the accomplishment of sample calculations, 36% (n=72) studies reported having adopted this procedure. Of studies that performed sample calculations, 25% (n=18) used predictive equations, 67% (n=48) considered methods with statistical power as their base, 3% (n=2) used confidence interval, 4% (n=3) did not mention the method and 1% (n=1) was based on the type of statistical test to be used later. Non-probabilistic sampling methods predominate for the selection of subjects; most studies do not report adopting calculations to estimate sample size and, among those that reported the use, the models that consider statistical power as the main criterion are predominant.
Resumo Trabalhos monográficos quantitativos utilizam, sistematicamente, procedimentos estatísticos inferenciais para testar hipóteses. Para tanto, é necessário que os procedimentos de amostragem e os tamanhos amostrais estejam adequados aos procedimentos propostos. Objetivou-se identificar os métodos de seleção amostral, bem como a realização e os tipos de cálculo para determinação do tamanho amostral adotados em teses e dissertações desenvolvidas em um programa de pós-graduação no campo da Educação Física. As teses e dissertações, defendidas entre 2003 e 2013, foram obtidas via repositório digital. Foram incluídos apenas estudos de caráter quantitativo, nos quais analisou-se: (1) critério para seleção amostral; (2) presença de cálculo amostral; (3) tipo de cálculo para estimativa do tamanho amostral. Foram incluídos 199 trabalhos. Dentre estes, 6% (n=11) usaram métodos probabilísticos para seleção amostral e 3% (n=6) usaram amostra animal. Quanto à realização de cálculo amostral 36% (n=72) dos trabalhos relatam ter adotado. Dos estudos que citam ter realizado cálculos, 25% (n=18) usaram equações preditivas, 67% (n=48) consideraram métodos com o poder estatístico como base, 3% (n=2) usaram o intervalo de confiança, 4% (n=3) não citam o método e 1% (n=1) baseou-se no tipo de teste estatístico a ser usado posteriormente. Os métodos de amostragem não-probabilísticos predominam para a seleção dos sujeitos; grande parte dos estudos não relata adotar cálculos para a estimativa do tamanho amostral e dentre aqueles que citam utilizar, os modelos que consideram o poder estatístico como principal critério são predominantes.